Bridging the Topological Divide: Dual-Branch Graph Distillation with Semantic Priors for Robust Cold-Start Recommendation
桥接拓扑鸿沟:语义先验驱动的双分支图蒸馏用于鲁棒冷启动推荐
🧭 冷启动推荐 · 图知识蒸馏
The Hong Kong University of Science and Technology (Guangzhou)
双分支图知识蒸馏:教师端语义先验重塑流形,学生端余弦蒸馏跨模态对齐,冷启动显著提升
📌 工作参考价值(4 点)
- 冷启动 item 的多模态语义特征不要直接拼进协同图或共享空间,建议解耦两阶段训练:先训练协同教师并用语义 prior 做平滑/初始化,再蒸馏到语义学生,避免破坏已有 ID 协同信号。
- 蒸馏损失用余弦相似度替代 MSE/点积,保持方向对齐、不强制匹配模长,更适合跨模态 embedding 迁移,且可减少对热物品向量尺度的扰动。
- 线上全局检索时,对冷启动物品向量做 dynamic norm reconstruction,按冷/暖物品分桶校准模长,避免语义分支模长不一致导致内积排序偏差;可直接复用到新品召回。
- 电商新品/广告冷启动可把“新品语义描述或图像”作为学生分支,老品协同教师蒸馏,发布即获得可检索表示;需评估两阶段训练的离线成本与更新频率。